如何在Spark中检查两个DataFrame列的交集

#如何在Spark中检查两个DataFrame列的交集| 来源: 网络整理| 查看: 265

newHires

我怎样才能intersect为单列工作？

1> Mara..：

您需要两个Spark DataFrame来使用intersect函数.您可以使用select函数从每个DataFrame中获取特定列.

在SparkR中:

newSalesHire

在pyspark:

newSalesHire = newHiresDF.select('name').intersect(salesTeamDF.select('name'))

【本文地址】

今日新闻